StepAudio 2.5 Technical Report
StepAudio 2.5：任务定制RLHF驱动的统一音频语言基础模型
🧭 音频语言统一建模 · 任务定制RLHF
StepFun
用任务定制RLHF和专用解码，使单一音频模型在ASR、TTS和实时交互上达到专用系统水平
📌 工作参考价值（4 点）
- 任务定制RLHF范式可迁移：不同业务（搜索/推荐/对话）可共享一个多模态基座，通过定义场景专属的reward函数实现差异化对齐，避免维护多套模型。
- 可验证多token解码提效：ASR采用的verifiable multi-token decoding，在生成式推荐（如Semantic ID逐token生成）中可设计验证器并行检验并及时剪枝，加速推理。
- 实时交互的生成式奖励建模：电商客服Agent可借鉴其生成式RM，在RLHF中同时优化延迟、人物一致性与回答质量，低成本实现端到端对话调优。
- 任务差异归结为数据与优化目标：该方法强调多模态对齐后，任务只需差异化的数据和优化目标，启发电商场景下文本-商品embedding对齐后，用指令微调/RL解决搜索、描述生成等多任务。